第一次使用hadoop，另外eclipse也不太熟悉，现在把自己在安装过程中得琐碎问题记录下来。 eclipse版本：eclipse-jee-indigo-SR2-linux-gtk.tar.gz ...

众所周知，Hadoop对处理单个大文件比处理多个小文件更有效率，另外单个文件也非常占用HDFS的存储空间。所以往往要将其合并起来。 1，getmerge hadoop有一个命令行工具getmerg ...

1.streaming的作用 Haoop支持用其他语言来编程，需要用到名为Streaming的通用API。 Streaming主要用于编写简单，短小的MapReduce程序，可以通过脚本语言编程， ...

文章转自：http://blog.csdn.net/heyutao007/article/details/5890103 趁这个时候，顺便把hadoop的用于比较的Writable, Writabl ...

简单的pageRank实现参考：http://wlh0706-163-com.iteye.com/blog/1397694 较为复杂的PR值计算以及在hadoop上的实现：http://deaths ...

全部程序如下： import java.io.IOException; import java.net.URI; import java.net.URISyntaxException; impor ...

首先明确： 1.Hadoop不支持全局变量，也不建议使用全局变量。 我的理解是，这是因为hadoop具有map类和reducer类，并且不同的task一般执行的是不同的map或reduce。 ...

hadoop命令的使用： Usage: hadoop [--config confdir] COMMAND 这里COMMAND为下列其中一个： <span style="font-siz ...

1.单个文件的压缩或解压 import java.io.FileInputStream; import java.io.FileOutputStream; import java.io.IOExce ...